HazardAuditor: From Executable Threats to Safer Computer-Use Agents
HazardAuditor:从可执行威胁到更安全的计算机使用智能体
🧭 智能体安全执行守卫与策略优化
Ant Group · Zhejiang University · Fudan University · Hunan Institute of Advanced Technology · Shanghai Innovation Institute
执行级安全审计框架 HazardAuditor,通过跨框架事件规范化和 GuardPO 序列级优化,显著提升计算机使用智能体安全守卫准确率
📌 工作参考价值(4 点)
- 对电商/广告 Agent(如自动选品、自动投放、智能客服)的安全监控:不要只审 prompt 和最终回复,要记录并审计运行时的浏览器/终端/文件系统事件流,用统一的 canonical event 表示跨系统行为,才能捕获多步操作组合出的恶意目标。
- GuardPO 训练技巧可直接迁移到内容安全审核、推荐理由生成、广告文案审核等生成式 guard 模型:将确定性的安全/不安全标签转化为序列级 advantage,并把 rationale 和 verdict 区域做长度归一化,避免长解释霸占梯度,让模型的决策部分真正主导优化。
- 跨框架异构 agent 的事件规范化思路可复用于多套推荐/搜索 agent 系统:定义统一的事件 schema(如 click、query、tool_call、file_write),把不同 agent 框架的执行日志转成同一格式,便于训练一个通用安全守卫模型,而不是每个系统单独维护规则。
- 执行级评估集构建方法值得借鉴:在受控沙箱中跑通 Claude Code、Codex 等不同 agent,采集真实执行轨迹作为 guard 训练数据,比静态构造的 prompt-response 对更贴近线上安全风险。